کتاب راهنمای ضروری برای اندازه اثر توانایی آماری و تحلیل و تفسیر نتایج تحقیق

هدف اصلی  پژوهش برآورد اثرات بزرگ و مستقیمی است که در جهان واقع، وجود خارجی دارند. یک . است منتج از یک رفتار، یک کوشش، یک تصمیم، یک استراتژی، یک فاجعه، یک برخورد، آوری، یک ابداع، یک مداخله، یک انتخاب، یک تکامل، یک انقلاب، یک شورش، یک حادثه، یک عمل، یک عادت، یک آیین، یک برنامه، یک جهش و با یک اتفاق باشد. در اوقات از من سوال می شود که محققان چه کاری انجام می دهند؟ پاسخ مختصر این است که آنها اندازه اثرات را برآورد می کنند. مهم نیست پدیده ای را که برای مطالعه انتخاب کرده ایم چیست اما ری است که فرصت هایی را برای تفکر درباره روش های جدید و بهتر برآورد مقدار اثرات صرف کرد. اما اگر چه ما مشغول انجام این برآوردها هستیم، هدف نهایی ما درک بهتر اثرات واقعی است. و این ولی است برای این که چرا ضروری است علاوه بر معنی داری آماری نتایج خود، معنی داری کاربردی معناداری جهان واقعی) آنها را نیز تفسیر کنیم. معنی داری آماری منعکس کننده عدم احتمال وقوع یافته های ماست اما معنی داری کاربردی در ارتباط با معنا و مفهوم یافته ها است. سوالی که ما می بایست به آن پاسخ دهیم این است که نتایج ما درباره اثرات خود، چه می گویند؟ تفسير معنی داری کاربردی نتایج پژوهش، نیازمند مهارتی است که به صورت طبیعی در روش های تحقیق سطح کارشناسی ارشد و دروس آمار تدریس نمی شوند. این مهارت ها شامل برآورد مقدار اثرات مشاهده شده، اندازه گیری توانایی آماری آزمونهای استفاده شده برای کشف اثرات و ادغام اندازه اثر بر آورد شده از مطالعات مختلف است. من شاخص های ۳۰ کتاب روش تحقیق و آمار را که در بازه سال های ۲۰۰۰ تا ۲۰۰۹ منتشر شده اند، بررسی کردم. اکثریت این کتاب ها هیچ مطلبی راجع به اندازه اثر " (۸۷ درصد)، راجع به معنی داری کاربردی" (90 درصد) و راجع به توانایی آماری (۵۳ درصد) نداشتند. در مواردی هم که مطالبی در کتاب ها راجع به مباحث فوق مشاهده شد، یا کاملا سطحی (معمولا در حد یک پاراگراف) یا به زبان ریاضی (گراف ها و معادلات) بود. این مطالب غایب از بسیاری از کتاب های آمار و روش تحقیق، دستورالعمل های ساده ای هستند که توضیح می دهند چگونه اندازه های اثر را تفسیر کنیم، دهیم، توانایی پژوهش های منتشر شده را اندازه کاربردی را از معنی داری آماری تشخیص معنی داری گیری کنیم، مطالعاتی با توانایی آماری کافی به منظور کشف پس اثرات طراحی کنیم، توانایی آماری را ارتقاء دهیم، اندازه اثر برآورد شده از مطالعات مرتبط را ادغام کنیم و این برآوردها را اصلاح کنیم تاخصیصه های خاص هر مطالعه (که بر نتایج مطالعه اثرگذار است)، جبران شود. این کتاب، شروع یک تلاش برای پر کردن شکاف قابل ملاحظه در آموزش و تربیت محققان علوم اجتماعی و رفتاری است. این کتاب سه سوالی که محققان به طور مرتب مطرح می کنند را خاطر نشان می سازد 1- چگونه معنی داری کاربردی نتایج پژوهش خود را تفسیر کنیم؟ ۲- آیا مطالعه من توانایی کافی برای یافتن آنچه که جستجو می کنم، دارد؟ ٣- چگونه نتایج خود را بر اساس مطالعات گذشته که نتایج مجزایی را گزارش کرده اند، ترسیم نماییم؟ سوال اول در ارتباط با معنا و مفهوم اندازه اثر است و بر گزارش و تفسیر اندازه های اثر دلالت می کند. در رشته های علوم اجتماعی و رفتاری، شناخت رو به رشدی از نیاز به گزارش اندازه های اثر همراه با معنی داری آماری نتایج آزمونها وجود دارد. مشابه با دیگر ابعاد و جنبه های تغییر شکلها و اصلاحات آماری، هیئت تحریریه حداقل ۲۳ نشریه روانشناسی بر اساس آیین نامه ای تاکید دارند که محققان و نویسندگان اندازه های اثر را گزارش نمایند (فیدلر و همکاران، ۲۰۱۴). تا کنون این احکام اجباری هیئت تحریریه، تنها اثر کوچکی بر عملکرد محققین و نویسندگان داشته است. در یک مطالعه اخير، اوسبرون (۲۰۰۸ ب) متوجه شد که کمتر از ۱۷ درصد از مطالعات در روانشناسی تربیتی، اندازه های اثر را گزارش می کنند. در مطالعه ای درباره رشد منابع انسانی، کمتر از ۶ درصد از مطالعات کمی، اندازه های اثر را تفسير کردند (کالاهان و ریو، ۲۰۰۶). در تحقيق آرمسترانگ و هنسون (۲۰۰۴) درباره یازده سال تحقیق در حیطه بازی درمانی، آنها متوجه شدند که تنها ۵ درصد از مقالات اندازه اثر را گزارش کرده اند. این احتمال وجود دارد که این درصدها در دیگر رشته ها حتی کمتر باشد. من یک دستیار پژوهشی داشتم که او حدود چهل نشریه در زمینه کسب و کار را بررسی کرد تا ببیند که آیا در بخش راهنمای نویسندگان و دستورالعمل های نشریه، در خصوص گزارش اندازه اثر با تحلیل توانایی آماری، مطلبی وجود دارد یا خیر. او هیچ چیزی نیافت. فشار هیئت تحریریه برای گزارش اندازه اثر، به طور غیر قابل انکاری، یک اتفاق خوب است.